花费 42 ms
spark深入:配置文件与日志

一、第一部分 1、spark2.1与hadoop2.7.3集成,spark on yarn模式下,需要对hadoop的配置文件yarn-site.xml增加内容,如下: 2、spar ...

Sat Jun 24 01:15:00 CST 2017 0 12743
spark2.10安装部署(集成hadoop2.7+)

这里默认你的hadoop是已经安装好的,master是node1,slaver是node2-3,hdfs启动在node1,yarn启动在node2,如果没安装好hadoop可以看我前面的文章 因为这 ...

Sat Jun 24 00:11:00 CST 2017 0 6149

 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM